New Technique to Enhance the Performance of Spoken Dialogue Systems by Means of Implicit Recovery of ASR Errors

This paper proposes a new technique to implicitly correct some ASR errors made by spoken dialogue systems, which is implemented at two levels: statistical and linguistic. The goal of the former level is to employ for the correction knowledge extracted from the analysis of a training corpus comprised of utterances and their corresponding ASR results. The outcome of the analysis is a set of syntactic-semantic models and a set of lexical models, which are optimally selected during the correction. The goal of the correction at the linguistic level is to repair errors not detected during the statistical level which affects the semantics of the sentences. Experiments carried out with a previouslydeveloped spoken dialogue system for the fast food domain indicate that the technique allows enhancing word accuracy, spoken language understanding and task completion by 8.5%, 16.54% and 44.17% absolute, respectively.Ministerio de Ciencia y Tecnología TIN2007-64718 HAD

Pensamiento computacional y programación visual por bloques en el aula de Primaria

El presente trabajo aborda la computación creativa en Primaria desde una perspectiva lúdica y activa a través de lenguajes de programación visual utilizando Scratch con un enfoque pedagógico. Se plantean actividades participativas centradas en un aprendizaje basado en el juego. La muestra del estudio consistió en un grupo experimental de 93 estudiantes que cursan 6º de Educación Primaria. Se comparan medias estadísticamente con un grupo de control y análisis no paramétrico aportando triangulación de datos con entrevistas grupales. El proceso de investigación se centra en la implementación de una estrategia de investigación basada en el diseño a través de métodos mixtos y complementarios, analizando datos y aplicando instrumentos desde enfoques cuantitativos y cualitativos. Se aprecia que hay mejoras significativas en lo que respecta a secuencias para crear música a partir del test U de Mann-Whitney. Se subrayan ventajas en el uso de conceptos computacionales que permiten trabajar con bucles, elementos que permiten la ejecución de paralelismos y la posibilidad de crear y jugar con la música a través de la tecnología educativa.Aquest treball aborda la computació creativa a Primària des d'una perspectiva lúdica i activa a través de llenguatges de programació visual utilitzant Scratch amb un enfocament pedagògic. Es plantegen activitats participatives centrades en un aprenentatge basat en el joc. La mostra de l'estudi va consistir en un grup experimental de 109 estudiants que cursen 6è d'Educació Primària. Es comparen mitjanes estadísticament amb un grup de control i anàlisi no paramètric aportant triangulació de dades amb entrevistes grupals. El procés de recerca se centra en la implementació d'una estratègia de recerca basada en el disseny a través de mètodes mixtos i complementaris, analitzant dades i aplicant instruments des d'enfocaments quantitatius i qualitatius. S'aprecia que hi ha millores significatives pel que fa a seqüències per crear música a partir del test U de Mann-Whitney. Se subratllen avantatges en l'ús de conceptes computacionals que permeten treballar amb bucles, elements que permeten execució de paral·lelismes i la possibilitat de crear i jugar amb la música a través de la tecnologia educativa.This paper highlights creative computing in elementary education from a playful and active perspective through visual programming languages using Scratch with a pedagogical approach. Participatory activities focused on game-based learning were implemented. The study sample consisted of an experimental group of 109 6th-grade students. Averages are compared statistically with a control group and non-parametric analysis, providing data triangulation with group interviews. The research process focuses on the implementation of a design-based research strategy using complementary methods, data analysis and tools from quantitative and qualitative approaches. The Mann-Whitney U Test showed significant improvements with regard to sequences to create music. Advantages were found in the use of computational concepts, especially when working with loops; elements which allow for parallel execution and the ability to create and play music through educational technology

Utilización de los sistemas de diálogo hablado para el acceso a la información en diferentes dominios

Ponencias de la Segunda Conferencia internacional sobre brecha digital e inclusión social, celebrada del 28 al 30 de octubre de 2009 en la Universidad Carlos III de MadridLa acción de conversar es el modo más natural para resolver un gran número de acciones cotidianas entre los seres humanos. Por este motivo, un interés histórico dentro del campo de las Tecnologías del Habla ha sido utilizar estas tecnologías en aplicaciones reales, especialmente en aplicaciones que permitan a una persona utilizar su voz para obtener información mediante la interacción directa con una máquina o para controlar un determinado sistema. El objetivo es disponer de sistemas que faciliten la comunicación persona-máquina del modo más natural posible, es decir, a través de la conversación. En esta comunicación se resumen los resultados de la aplicación de estas tecnologías para el desarrollo de diferentes sistemas de diálogo en los que la interacción entre el usuario y el sistema se lleva a cabo mediante habla espontánea en castellano. Para su implementación se ha primado la utilización de diferentes herramientas de software libre para el reconocimiento automático del habla, compresión del lenguaje natural, gestión del diálogo y síntesis de texto a voz. De este modo, el objetivo principal de la comunicación es presentar las principales ventajas que proporcionan los sistemas de diálogo para facilitar el acceso a diferentes servicios dentro de dominios semánticos restringidos, qué posibilidades brinda el uso de herramientas de software libre para su implementación y su evaluación en diferentes casos concretos de aplicación

DS-UCAT: Sistema de diálogo multimodal y multilingüe para un entorno educativo

Actas de las IV Jornadas de Tecnología del Habla (JTH 2006)En este artículo presentamos un sistema de diálogo multimodal y multilingüe que estamos desarrollando para proporcionar asistencia a estudiantes y profesores en algunas de sus actividades habituales en un entorno educativo, p. e. en una Facultad de una Universidad. Tenemos previsto que además de interactuar con el usuario, el sistema pueda interactuar con el entorno en que éste se encuentra en un momento dado, el cual puede cambiar a lo largo de una interacción conforme el usuario se mueve dentro del centro educativo. El artículo describe la arquitectura del sistema, muestra cómo se realiza la interacción con la versión actual del mismo, y comenta cómo tenemos previsto utilizar técnicas de inteligencia ambiental para mejorar su funcionamiento.Este trabajo ha sido financiado por el Ministerio de Ciencia y Tecnología, mediante el proyecto TIN2004-03140 Ubiquitous Collaborative Training

Desarrollo de actividades de evaluación para un sistema on-line de aprendizaje de idiomas

Actas de: VII Jornada de Innovación Pedagógica. Proyecto ADA-Madrid: Experiencias de evaluación en e-learning. Madrid, 13 abril 2012.En este artículo describimos la aplicación LEGA (Learning English? Go Ahead!), desarrollada con la finalidad de integrar las diferentes actividades de evaluación definidas en los exámenes de la Universidad de Cambridge para el programa ESOL (English for Speakers of Other Languages). Entre los objetivos de la aplicación destacan la integración de diferentes tecnologías para facilitar la interacción natural persona-máquina y la adaptación de la misma teniendo en cuenta las preferencias y evolución específica de cada uno de sus usuarios durante el proceso de aprendizaje.In this paper we describe the LEGA system (Learning English? Go Ahead!), developed with the aim of integrating the set of assessment exercises defined by the University of Cambridge in the ESOL program (English for Speakers of Other Languages). The objectives of the application include integrating different technologies to facilitate human-machine natural interaction and its adaptation to consider users’ specific preferences and evolution during the learning process.Publicad

La plataforma EDUCAGENT: agentes conversacionales inteligentes y entornos virtuales aplicados a la docencia

El desarrollo de la Web 2.0 y el gran interés alcanzado por las redes sociales ha posibilitado la introducción de un gran número de aplicaciones y entornos educativos que posibilitan nuevas formas de comunicación e interacción entre sus usuarios. En este contexto, los mundos virtuales y los agentes conversacionales facilitan la creación de entornos educativos que intensifican la percepción entre sus usuarios y que proporcionan una comunicación más natural y adaptada a las características y preferencias específicas de cada usuario. En este artículo describimos un sistema multiagente desarrollado para el apoyo a la docencia y el aprendizaje autónomo de los alumnos. A través del sistema, se presenta a los alumnos casos y problemas que deben resolver, y que posibilitan además la autoevaluación de su aprendizaje, especialmente en iniciativas de tele-educación y realización de cursos on-line. La plataforma EducAgent se ha desarrollado en la Universidad Carlos III de Madrid dentro de la Convocatoria de Apoyo a Experiencias de Innovación e Internacionalización Docente. El objetivo principal del proyecto es la creación de un espacio virtual innovador basado en los postulados del Espacio Europeo de Educación Superior, que haga de las asignaturas y cursos on-line un espacio más flexible, participativo y atractivoWith the development of so-called Web 2.0 and the great interest and extension that social networks have now reached, a large number of e-learning environments and applications that originate new forms of communication and interaction among users have been quickly introduced. Within this framework, virtual worlds and conversational agents facilitate the creation of educative applications that intensify the perception between their users and provide a more natural communication adapted to the characteristics and specific preferences of each user. In this paper, we describe a multi-agent system developed for teaching support and student’s self-learning. The main objective of the EducAgent platform is the creation of an innovative virtual space following the principles of the European Higher Education Area to make subjects and e-learning initiatives to become a more flexible, participatory and attractive space. One of the most important characteristics of the developed platform is to facilitate a more natural interaction between the system and students by means of conversational agents. We describe the main features of the EducAgent platform and its application in the new European Computer Science Degree at the Carlos III University of Madrid.Trabajo llevado a cabo dentro de la 9ª Convocatoria de Apoyo a Experiencias de Innovación e Internacionalización Docente de la Universidad Carlos III de Madrid y financiado parcialmente por los Proyectos CICYT TIN2008-06742-C02-02/TSI, CICYT TEC2008- 06732-C02-02/TEC, CAM CONTEXTS (S2009/TIC-1485) y DPS2008-07029-C02-02.Publicad

On the Development of Adaptive and User-Centred Interactive Multimodal Interfaces

Multimodal systems have attained increased attention in recent years, which has made possible important improvements in the technologies for recognition, processing, and generation of multimodal information. However, there are still many issues related to multimodality which are not clear, for example, the principles that make it possible to resemble human-human multimodal communication. This chapter focuses on some of the most important challenges that researchers have recently envisioned for future multimodal interfaces. It also describes current efforts to develop intelligent, adaptive, proactive, portable and affective multimodal interfaces

Creando contenidos curriculares digitales de Ciencias Sociales para Educación Primaria. Una experiencia TPACK para futuros docentes

The introduction of Information and Communication technologies (ICT) in the classrooms has generated a series of changes in the approaches to the teaching–learning process. This has evolved into the appearance and development of many technologies and emergent pedagogies at the service of the teacher. It is necessary to encourage teacher training on ICT through the interaction of three great dimensions: discipline, pedagogy and technology. The main objective of this paper is to evaluate the perception of a group of 82 students of the subject “New methodologies for the teaching of History”, part of the Degree of Teacher of Primary Education at Albacete, in which, from the TPACK model as an intervention approach, they had to create their own materials and digital contents. The research developed has been described, following a mixed model, including characteristics from qualitative and quantitative models. The methodology of intervention was applied from an active and dynamic approach, based on Learning Based in Problems and on the TPACK model. The results have shown high values on the organization of the subject, the methodology applied, the quality, and the usefulness of the technological tools used. The results also highlight the benefits of fostering teacher training on ICT aimed at creating self-production of digital contents in teacher initial training.La introducción de las Tecnologías de la Información y de la comunicación (TIC) en las aulas ha generado una serie de cambios en los planteamientos del proceso de enseñanza-aprendizaje. Esto ha derivado en la aparición y desarrollo de numerosas tecnologías y pedagogías emergentes al servicio del docente en el aula. Se establece, por tanto, la necesidad de fomentar la capacitación de los docentes en TIC a través de la interacción de tres grandes dimensiones: disciplinar, pedagógica y tecnológica. El objetivo principal de este trabajo ha sido valorar las percepciones de un grupo de 82 alumnos de la asignatura “Nuevas metodologías para la enseñanza de la Historia” del Grado de Maestro en Educación Primaria de la Facultad de Educación de Albacete, en la que, partiendo del modelo TPACK como planteamiento en la intervención, han tenido que crear sus propios materiales y contenidos digitales. La investigación desarrollada es descriptiva y ha seguido un modelo mixto, integrando características de los enfoques cuantitativo y cualitativo. La metodología de intervención se realizó desde un enfoque activo y dinámico, basada en el Aprendizaje Basado en Problemas y el modelo TPACK. Los resultados han mostrado valores altos sobre la organización de la asignatura, la metodología empleada, la calidad y la utilidad de las herramientas tecnológicas utilizadas, así como la conveniencia de potenciar la capacitación y perfeccionamiento en TIC para la creación y autoproducción de contenidos digitales en la formación inicial de maestros

Uso de valores de confianza y expectativas en el sistema de diálogo SAPLEN

El sistema SAPLEN (Sistema Automático de Pedidos en LEnguaje Natural) es un sistema de diálogo en lenguaje natural capaz de atender consultas y peticiones de productos de los clientes de los restaurantes de comida rápida. En este trabajo presentamos en primer lugar la metodología empleada para realizar el reconocimiento de las palabras de las frases de los usuarios durante el desarrollo y test del sistema. A continuación comentamos los tipos de fenómenos relacionados con el reconocimiento de palabras tratados por el sistema. Posteriormente describimos el uso de valores de confianza y expectativas para tratar apropiadamente algunos errores de reconocimiento. Finalmente, comentamos algunas líneas de trabajo futuro y conclusiones

Integración de los sistemas de diálogo para la interacción en redes sociales = Spoken Dialogue Systems for its Interaction in Social Networks

Con el desarrollo de la denominada Web 2.0 y el gran interés y extensión que han alcanzado actualmente las redes sociales, se están introduciendo rápidamente un gran número de aplicaciones que originan a la vez nuevas formas de comunicación e interacción entre los usuarios. Por otro lado, la investigación en el campo de los sistemas de diálogo posee en la actualidad un gran número de retos relativos a la introducción de nuevas modalidades tanto de entrada como de salida, así como aplicaciones y metodologías que favorezcan la adaptación de estos sistemas a las características y preferencias específicas de cada usuario. Las redes sociales, y más concretamente los mundos virtuales, suponen de este modo un escenario perfecto para llevar a cabo estas lineas de investigación. En este artículo presentamos un estudio relativo a la integración de sistemas de diálogo en redes sociales, describiendo en nuestro trabajo la utilización de un sistema de diálogo que proporciona información académica para crear una avatar conversacional dentro del mundo virtual de Second Life.With the development of so-called Web 2.0 and the great interest and extension that social networks have now reached, a large number of applications that originate new forms of communication and interaction among users have been quickly introduced. Furthermore, research in the eld of dialogue systems currently have a number of challenges related to the introduction of new input and output modalities, as well as applications and methodologies that allow the personalization of these systems to the speci c characteristics and preferences of each user. Social networks and, in particular virtual worlds, have thus a perfect setting to carry out these research objectives. In this paper we present a study about the integration of dialog systems with social networks, describing the use of a dialogue system that provides academic information to develop a conversational bot in the Second Life virtual world.Trabajo nanciado parcialmente por los Proyectos CICYT TIN2008-06742-C02-02/TSI, CICYT TEC2008-06732-C02-02/TEC, CAM CONTEXTS (S2009/TIC-1485) y DPS2008-07029-C02-02Publicad